Creëren dataconnectoren d.m.v Python en andere codingtalen;- Definiëren data validatie test om te runnen in de data pipeline;
- Definiëren van monitoring en alerting om zichtbaarheid te garanderen wanneer de data flow onderbroken is of niet verwacht gedrag vertoont;
- In het geval van incidenten, snel de root cause analyse kunnen doen zodat het incident opgelost kan worden met zo min mogelijk impact voor de eindgebruiker;
- Verantwoordelijk voor bouwen, deployen, onderhouden en optimaliseren van data ingestionand dataconnectorsom een data flow naar het datalake te maken;
- De data engineer ontsluit nieuw elogging naar het DSH, filtert vervolgens deloggingen stelt de logs beschikbaar in een CEF format.
- Meerdere jaren ervaring als Data Engineer
- Ervaring met Git en Docker
- Ervaring met Python
- Ervaring met Azure Data Lake
- Ervaring met Azure Synapse
- Ervaring met Azure SQL DWH
- Ervaring met Azure Data Factory
- Ervaring met Splunk, Databricks (pre)
- Ervaring met Yaml
Company
Location
Utrecht - Netherlands
Job type
Full-Time
Python Job Details
Over de functie
Voor onze klant zoeken wij een gedreven Data Engineer. Als Data Engineer ga je aan de slag met het connecten van data sources, ETL, complexe data processing, pipelines & automation:
Functie eisen
Over het bedrijf
nullSolliciteer
Herken jij jezelf in dit profiel? En lijkt werken bij Maandag® je een mooie stap? Solliciteer dan meteen. Wie weet ziet jouw maandag er binnenkort dan net zo tof uit als die van ons.
WO,HBO
3-6 jaar,6-10 jaar,Meer dan 10 jaar
More Developer Job Boards
Fullstack Developer Jobs Golang Jobs JavaScript Jobs Python Jobs React Jobs Rust Jobs Java Jobs